Không rõ tên thật lẫn ngày sinh của Hồ hoàng hậu. Phụ thân bà là Hồ Trường Nhân (胡長仁), anh trai Hồ thái hậu. Theo vai vế gia tộc, bà là cháu gọi Hồ thái hậu bằng cô.

Mùa đông năm 571, sau khi khám phá ra việc Hồ thái hậu có quan hệ tình ái với hòa thượng Đàm Hiến (曇獻), Cao Vĩ đã cho giết Đàm Hiến và bắt Hồ thái hậu chuyển vào Bắc cung quản thúc, không cho phép các quý tộc đến thăm bà. Để làm vừa lòng hoàng nhi, Hồ thái hậu đã triệu con gái của anh trai ruột là Hồ Trường Nhân (胡長仁) vào cung và cho người này vận những loại y phục thượng đẳng. Cao Vĩ khi trông thấy Hồ thị đã say đắm và cưới bà làm thiếp.